#evidence grounding - AI Papers Daily

CLUE: Uncovering Social Context for Pragmatic Understanding

CLUE：通过发掘社交上下文实现语用理解

🧭 训练模型发现对话社会线索用于语用理解

Purdue University

用两阶段训练+GRPO奖励让模型自我发掘对话中的社会线索，准确率提升且推理 token 减少超 80%

📌 工作参考价值（4 点）

可借鉴 Grounded Information Utilization 奖励设计：在对话理解、用户反馈归因等场景，要求模型的新推断必须引用具体交互证据，并惩罚冗余推理，可显著压缩推理 token，降低线上成本。
两阶段训练方案适合小样本业务任务：先用监督证据推理教会模型引用上下文，再用 GRPO 强化，类似客服对话意图消歧、评论情感归因等标注数据少的场景可以低成本迁移。
推理 self-contained、不依赖外部 RAG 或知识库，适合低延迟 Agent 的对话理解模块，减少检索链路，同时输出可验证的证据引用。
评估中加入推理 token 效率指标，避免只追准确率导致 CoT 过度生成；跨域跨语言 F1 提升 9.3% 的结果说明该训练方式有泛化潜力。

Training | 2026-10-15 | cs.CL | score 7/10

将 BrowseComp-Plus 投影到 ClimbMix：构建更真实的智能搜索评估语料

🧭 Agentic search 评估 · 语料投影

University of Waterloo

提出数据集无关的投影流水线，把 BrowseComp-Plus 问题证据迁移到 553M 文档的 ClimbMix，得到 57 个高置信评估样本

📌 工作参考价值（4 点）

构建离线评估集时，如果现有语料规模小且由 benchmark 自身支持文档和 hard negatives 组成，可以用投影 pipeline 把问题映射到大规模通用语料，再用自动验证+独立 agent+人工复核筛出证据完整的样本，避免评测泄漏和检索难度失真。
原子 reasoning hop 分解 + 逐 hop 证据定位的流程可以直接迁移到 RAG 或搜索 Agent 的训练/评测数据清洗，确保每个推理步骤都有对应文档支撑，减少幻觉式回答。
检索质量是 agentic search 的瓶颈：即使最终答案准确率只降 5 个点，evidence recall 从 84.3% 跌到 21.4% 说明检索侧严重不足。业务中应把 evidence recall 作为独立监控指标，与下游任务指标解耦。
发布的 projection pipeline 和 benchmark 可作为固定语料评估的模板，适合需要分离 Agent 推理能力与检索器能力的场景，例如电商搜索、推荐理由生成、客服 Agent 评测。

Eval | 2026-08-20 | cs.IR | score 7/10